Aprendizaje en investigación clínica: experiencia de enseñanza híbrida con estudiantes de medicina / Learning in Clinical Research: Hybrid Teaching Experience with Medical Students

Introducción: la pandemia de COVID-19 indujo un cambio en nuestro sistema de salud y de educación. Los programas formativos también tuvieron que adaptarse y exigieron un cambio rápido. Objetivos: describir una experiencia educativa de enseñanza virtual/híbrida en investigación clínica, entre docentes del Servicio de Clínica de un hospital universitario y estudiantes de Medicina de una institución privada, que participaron del Programa ESIN (EStudiantes en INvestigación). Metodología: los contenidos y las estrategias educativas incluyeron las clases teóricas audiograbadas o videograbadas (asincrónicas y autoadministradas), el aprendizaje basado en proyectos, los talleres prácticos (encuentros sincrónicos virtuales y grupales), mediante la adopción de modelos de aprendizaje como el aula invertida, y la tutoría individual entre docente-estudiante. Los datos se recopilaron mediante la observación en contextos académicos, y basándonos en elementos de encuestas anónimas de satisfacción, previo consentimiento informado de los participantes. Resultados: participaron 14 estudiantes, 6 durante el año 2021 y 8 durante 2022. Todas mujeres y estudiantes de medicina (50% de cuarto año, 35% de sexto año y 15% de quinto año). Las técnicas implementadas favorecieron la participación y promovieron el aprendizaje activo, basado en proyectos. Mencionaron aspectos positivos como el enfoque académico práctico, la disponibilidad del equipo docente para atender cualquier duda, el tiempo y el entusiasmo por enseñar y fomentar la participación. Los videos teóricos resultaron útiles como herramientas de repaso, y los encuentros grupales fueron especialmente valorados, si bien los encuentros individuales fueron destacados como ayuda y apoyo previo a los congresos científicos. En general, manifestaron que fue una experiencia enriquecedora que demostró que se puede lograr lo que se creía imposible. Todas participaron activamente de al menos un congreso científico, y el 50% resultó coautora de una publicación académica. Conclusión: los estudiantes asumieron compromisos y responsabilidades, e incorporaron competencias y habilidades en la implementación y en la difusión de los proyectos. Esta experiencia educativa facilitó que el tiempo de clase pudiera optimizarse para intercambio, discusión y dudas. Los recursos producidos, las actividades desarrolladas y los contenidos abordados quedan disponibles a nivel institución. (AU)

Introduction: the COVID-19 pandemic brought about a change in our health and education system. Training programs also had to adapt and required rapid change. Objectives: to describe an educational experience of virtual/hybrid teaching in clinical research between teachers of the Clinical Service of a university hospital and medical students of a private institution who participated in the ESIN Program (Students in Research). Methodology: the contents and educational strategies included audio or videotaped lectures (asynchronous and self-administered), project-based learning, practical workshops (virtual and group synchronous meetings) by adopting learning models such as the inverted classroom, and individual tutoring between teacher and student. We gathered the data through observation in academic contexts and based on elements of anonymous satisfaction surveys, with prior informed consent of participants. Results: fourteen students participated, six in 2021 and eight in 2022. All were women and medical students (50% fourth year, 35% sixth year, and 15% fifth year). The techniques implemented favored participation and promoted active, project-based learning. They mentioned positive aspects such as the practical academic approach, the availability of the teaching team for any doubts, the time and enthusiasm for teaching, and encouraging participation. The theory videos were a valuable review tool, and team meetings received high praise even if the one-on-one meetings received much attention as help and support before the scientific congresses. In general, they stated that it was an enriching experience that showed that you can achieve what you thought impossible. All of them actively participated in at least one scientific congress, and 50% were co-authors of an academic publication. Conclusion: the students assumed commitments and responsibilities and incorporated competencies and skills in project implementation and dissemination. This educational experience helped to optimize class time for exchange, discussion, and doubts. The resources produced, the activities developed, and the contents addressed are now available at the institutional level. (AU)

Construção e evidência de validade do Instrumento de Avaliação do Conhecimento sobre Prevenção Quaternária / Construction and evidence of validity of the knowledge assessment instrument on quaternary prevention / Construcción y pruebas de validez del instrumento de evaluación de los conocimientos sobre prevención cuaternaria

Objetivo: desenvolver e estimar a evidência de validade de um instrumento para avaliar a percepção dos acadêmicos de medicina sobre a prevenção quaternária. Método: Trata-se de um estudo metodológico desenvolvido em três etapas: 1) construção do instrumento para avaliação do conhecimento sobre Prevenção Quaternária a partir de referenciais teóricos; 2) evidência de validade baseada no conteúdo, realizada por 13 juízes; 3) evidência de validade baseada na estrutura interna, realizada por 180 acadêmicos de medicina. Análises fatoriais foram realizadas para verificar a estrutura hierárquica do modelo a partir das duas dimensões inicialmente construídas: Domínio Conhecimento e Domínio Prático. Resultados: O coeficiente de evidência de validade de conteúdo da escala total (CVCt) foi de 0,98, demonstrando uma alta concordância entre os avaliadores com a conceituação teórica subjacente. Quanto à precisão do instrumento, todos os itens apresentaram valores de Alfa de Cronbach acima de 0,7, indicando boa precisão. Verificou-se bons indicadores de precisão para a escala com dois fatores (Domínio Conhecimento e Domínio Prático) ƛ2= 109.746, gl= 103; p<0,001; ƛ2/gl= 0,30; CFI= 0,98 e RMSEA 0,019. Conclusão: o instrumento IP4-15 apresentou as evidências de validade de conteúdo, estrutura interna, precisão e propriedades dos itens adequadas para avaliar o conhecimento e a prática da prevenção quaternária de acadêmicos do curso de medicina. Serão necessários estudos futuros para investigar a aplicabilidade do IP4-15 para outras populações.(AU)

Objective: to develop and estimate the evidence of validity of an instrument to assess the perception of medical students about Quaternary Prevention. Method: this is a methodological study carried out in three steps: 1) construction of the instrument to assess knowledge about Quaternary Prevention based on theoretical references; 2) content-based evidence of validity, performed by 13 judges; 3) internal structure-based evidence of validity, performed by 180 medical students. Factor analyzes were performed to verify the hierarchical structure of the model based on the two dimensions initially constructed: Knowledge Domain and Practical Domain. Results: The total scale content validity evidence coefficient (CVCt) was 0.98, demonstrating a high inter-rater agreement with the underlying theoretical conceptualization. As for instrument precision, all items had Cronbach's Alpha values above 0.7, indicating good precision. Good precision indicators were found for the scale with two factors (Knowledge Domain and Practical Domain) ƛ2= 109,746, gl= 103; p<0.001; ƛ2/gl=0.30; CFI=0.98 and RMSEA 0.019. Conclusion: the IP4-15 instrument presented adequate evidence of content validity, internal structure, precision, and properties of the items to assess the knowledge and practice of Quaternary Prevention of medical students. Future studies will be needed to investigate the applicability of IP4-15 to other populations.(AU)

la percepción de los estudiantes de medicina sobre la Prevención Cuaternaria. Método:se trata de un estudio metodológico desarrollado en tres etapas: 1) construcción de un instrumento para evaluar el conocimiento sobre Prevención Cuaternaria basado en referencias teóricas; 2) prueba de validez basada en el contenido, realizada por 13 jueces; 3) prueba de validez basada en la estructura interna, realizada por 180 estudiantes de Medicina. Se realizaron análisis factoriales para verificar la estructura jerárquica del modelo a partir de las dos dimensiones construidas inicialmente: Dominio del conocimiento y dominio práctico. Resultados: el coeficiente de evidencia de validez de contenido de la escala total (CVCt) fue de 0,98, lo que demuestra...(AU)

Construção e validação de Quiz para avaliação de conhecimento cognitivo sobre febre maculosa / Creation and validation of a quiz to assess cognitive knowledge about spotted fever / Construcción y validación de un cuestionario para evaluar los conocimientos cognitivos sobre la fiebre maculosa

Objetivo: construir e validar um Quiz de avaliação cognitiva sobre Febre Maculosa, voltado para avaliar o conhecimento de estudantes que moram e/ou frequentam cidades de risco para a doença. Métodos: estudo metodológico desenvolvido em três etapas: construção do Quiz; validação de aparência e conteúdo com nove juízes, com análise realizada através do cálculo de Índice de Validade de Conteúdo, com valor de corte 0,80; e validação semântica, seguindo a metodologia DISABKIDS® com 12 alunos de cursos técnicos profissionalizantes, com avaliação dos dados realizada por estatística descritiva, tendo sido utilizado o programa Statistical Package for the Social Sciences. Resultados: o processo de validação foi subdividido em duas etapas: validação de aparência e conteúdo por profissionais das áreas de biologia e educação e validação semântica por alunos de cursos profissionalizantes. O Quiz foi elaborado e aplicado e os resultados mostraram um índice de validade de conteúdo superior a 0,80 para todas as variáveis analisadas. Na validação semântica, o Quiz foi considerado como de fácil compreensão e não houve dificuldade para o preenchimento. Conclusão: o Quiz construído foi validado quanto à aparência, ao conteúdo e à semântica, tendo alcançado concordância satisfatória, o que garante ser um instrumento adequado para o processo de avaliação sobre a temática investigada. Com isso, espera-se contribuir para a difusão de conhecimento acerca da identificação dos fatores de risco e da prevenção da saúde relacionados à Febre Maculosa.(AU)

Objective: to create and validate a cognitive assessment Quiz about Spotted Fever, targeted at evaluating what students living in and/or traveling to risk cities know about the disease. Methods: a methodological study developed in three stages: creation of the Quiz; face and content validation with nine judges, with analysis performed by calculating the Content Validity Index, with a cutoff value of 0.80; and semantic validation, following the DISABKIDS®methodology with 12 students from professional technical courses, with data evaluation performed by means of descriptive statistics, using the Statistical Package for the Social Sciences program. Results: the validation process was subdivided into two stages: face and content validation by professionals in the Biology and Education areas, and semantic validation by students attending professional courses. The Quiz was prepared and applied and the results showed a Content Validity Index above 0.80 for all the variables analyzed. In the semantic validation, the Quiz was considered as easy to understand and there were no difficulties filling it in. Conclusion: the Quiz created was validated in terms of face, content and semantics, having achieved satisfactory agreement, which guarantees that it is an adequate instrument for the evaluation process on the theme investigated. With this, the expectation is to contribute to disseminating knowledge about the identification of risk and health prevention factors related to Spotted fever.(AU)

Objetivo: construir y validar un Cuestionario de evaluación cognitiva sobre la Fiebre Maculo-sa, destinado a evaluar los conocimientos de los estudiantes que viven y/o asisten a ciudades con riesgo para la enfermedad. Métodos: estudio metodológico desarrollado en tres etapas: construcción del Cuestionario; validación de apariencia y contenido con nueve jueces con aná-lisis realizado mediante el cálculo del Índice de Validez de Contenido, con un valor de corte de 0.80 y validación semántica, siguiendo la metodología DISABKIDS® con 12 estudiantes de carreras técnicas profesionales, con evaluación de datos realizada mediante estadística des-criptiva, donde se utilizó el programa Statistical Package for the Social Sciences. Resultados: el proceso de validación se subdividió en dos etapas: validación de apariencia y contenido por profesionales de las áreas de biología y educación, y validación semántica por estudiantes de carreras profesionales. El Cuestionario fue diseñado y aplicado. Los resultados mostraron un índice de validez de contenido superior a 0,8 para todas las variables analizadas...(AU)

Satisfaction of the ophthalmology residents with online progress test / Satisfação dos residentes de oftalmologia com testes de progresso online

ABSTRACT Objective To investigate if there is knowledge improvement over the Residency years, as well as students' satisfaction about progress test. Finally, to describe the implementation of the online progress test in some Ophthalmological Residency programs in Brazil. Methods It was an observational cross-section study. The participants were all Ophthalmology residents who accepted to join the study. They did an online test and answered demographic and satisfaction questionnaires. Results Two hundred and fifty-nine residents joined the study. 42,86% of the residents answered the demographic questionnaire and 6,95% answered the satisfaction questionnaire. In general, the residents approved the website as a tool for self-learning and to improve residency programs. Conclusion Over the years, the residents acquired knowledge during the residency program. In general, residents were satisfied with the test. The implementation of the online progress test system in the Ophthalmological Residency schools in Brazil was successful.

RESUMO Objetivo Avaliar se ocorre melhora do desempenho na prova dos residentes ao longo dos anos de curso e o grau de satisfação dos residentes com o teste de progresso. Além disso, descrever a implementação do teste de progresso em alguns serviços de residência em oftalmologia no Brasil. Métodos Estudo observacional prospectivo. Os participantes foram todos os residentes de Oftalmologia que aceitaram participar do estudo. Eles fizeram um teste online e responderam a um questionário pessoal e um de satisfação. Resultados Duzentos e cinquenta e nove residentes participaram do estudo. 42,86% dos residentes responderam o questionário pessoal e 6,95% responderam o questionário de satisfação. Em geral, os residentes aprovaram o site como instrumento de autoaprendizado e como instrumento para melhoria dos programas de residência. Conclusão Houve aquisição de conhecimento dos residentes ao longo do curso. De um modo geral, os residentes ficaram satisfeitos com o teste. A implementação do teste de progresso nos serviços de residência de Oftalmologia foi bem-sucedida.

Entrenamiento procedimental básico (EPROBA) en suturas para estudiantes de medicina durante pandemia por SARS-CoV-2 (COVID-19) / Suturing basic procedural skills training for medical students during COVID-19 pandemic

BACKGROUND: The adoption of sanitary measures due to the SARS-CoV-2 pandemic hampered teaching and learning methods in medicine. AIM: To communicate the results of a wound suture training workshop, based on the Basic Procedural Skills Training methodology and adapted to the pandemic context. MATERIAL AND METHODS: One hundred fourteen students were randomized in small groups due to sanitary measures and trained with a modification of the Basic Procedural Skills Training methodology. An informed consent was obtained from every student. The suturing skills were evaluated before and after the intervention with "The Objective Structured Assessment Of Technical Skills" (OSATS) instrument. The perception of the workshop and the implementation of the COVID-19 prevention measures were also evaluated. RESULTS: The students showed a statistically significant improvement after the intervention. In the OSATS verification list, the average score increased from 4.5 to 8.6 (p < 0.01). In the OSATS global scale, the average score increased from 13.0 to 25.3 (p < 0.01). The perception of the workshop and the prevention measures were well evaluated. CONCLUSIONS: Despite all the limitations of the pandemic context, we achieved a significant improvement after the intervention and a very good perception by the students.

Dificultad y discriminación del examen de Ontogenia Humana y SOMA en la carrera de medicina / Difficulty and discrimination of the Human Ontogeny and Osteomioarticular System Exam in the medical major

Introducción: La evaluación es la categoría reguladora del proceso de enseñanza-aprendizaje. Los instrumentos evaluativos utilizados para tal propósito deben reunir los criterios mínimos de calidad. Objetivo: Evaluar la dificultad y discriminación del examen de la asignatura Ontogenia Humana y SOMA de la carrera de medicina en la Facultad de Ciencias Médicas de Matanzas en tres cursos académicos. Métodos: Se realizó un estudio de investigación descriptivo transversal en el marco de la educación médica, para describir la estructura del examen de la asignatura Ontogenia Humana y SOMA, en la Facultad de Ciencias Médicas de Matanzas, en los cursos 2016-2017, 2017-2018 y 2018-2019; y determinar la frecuencia de errores, y el nivel de dificultad y el poder de discriminación de estos. Resultados: En el examen aplicado en los tres cursos predominaron las preguntas tipo ensayo. La frecuencia de errores fue media, baja y alta, respectivamente. Los exámenes presentaron dificultad media y excelente poder de discriminación. Conclusiones: Los indicadores de calidad estudiados alcanzaron valores satisfactorios para el examen de la asignatura Ontogenia Humana y SOMA en la Facultad de Ciencias Médicas de Matanzas en los cursos académicos estudiados(AU)

Introduction: Evaluation is the regulatory category of the teaching-learning process. The evaluative instruments must meet the minimum quality criteria. Objective: To assess the difficulty and discrimination of the exam of the Human Ontogeny and Osteomioarticular System subject of the medical major in the School of Medical Sciences of Matanzas during three academic years. Methods: A descriptive and cross-sectional research was carried out in the framework of medical education, in order to describe the structure of the exam of the Human Ontogeny and Osteomioarticular System subject, in the School of Medical Sciences of Matanzas, in the academic years 2016-2017, 2017-2018 and 2018-2019; as well as to determine the frequency of errors, together with their level of difficulty and power of discrimination. Results: In the exam applied during the three academic years, essay-type questions predominated. The frequency of errors per year was medium, low and high, respectively. The exams presented medium difficulty and excellent power of discrimination. Conclusions: The studied quality indicators obtained satisfactory values for the exam of the Human Ontogeny and Osteomioarticular System subject in the School of Medical Sciences of Matanzas during the studied academic courses(AU)

Aplicación de la teoría clásica de test a la evaluación de preguntas de opción múltiple / Applying the classical test theory to evaluation in multiple-choice questions

Introducción: La evaluación de la educación tiene funciones instructivas y educativas. Además de la acreditación de los conocimientos adquiridos por los estudiantes, sus propósitos incluyen la obtención de información del nivel del aprendizaje individual y grupal de los educandos. Para alcanzar estos objetivos es importante evaluar la calidad y validez de los instrumentos evaluativos utilizados. La psicometría investiga cómo evaluar los constructos y atributos del aprendizaje de los estudiantes y posibilita analizar la validez de los cuestionarios empleados para la evaluación educativa, a través de la aplicación de instrumentos como la teoría clásica de los test y la teoría de respuesta al ítem. Objetivo: Determinar la validez de las preguntas de opción múltiple y de los ítems de un examen final, mediante el cálculo de los índices de la teoría clásica de test. Métodos: Se realizó un estudio analítico de corte transversal con la finalidad de evaluar la calidad y validez de las preguntas de opción múltiple del examen final ordinario de la asignatura Propedéutica Clínica del curso 2018-2019, mediante la evaluación de los reactivos según la teoría clásica de test. Resultados: La frecuencia relativa de la respuesta de los ítems fue adecuada para un examen final de asignatura. El 75 por ciento de los ítems del examen resultaron correctamente confeccionados. El 87,5 por ciento de los reactivos presentó un adecuado índice de discriminación. Conclusiones: Los reactivos evaluados tuvieron una calidad aceptable para una prueba de certificación, como el examen final de una asignatura; aunque se detectaron deficiencias menores(AU)

Introduction: Evaluation in education has instructive and educational functions. Apart from accreditation of knowledge acquired by the students, its purposes include obtaining information on the level of individual and group learning among students. To achieve these objectives, it is important to assess the quality and validity of the evaluation instruments used. Psychometrics investigates how to assess constructs and attributes of student learning and makes it possible to analyze the validity of the questionnaires used for evaluation in education, through the application of instruments such as the classical test theory and the item response theory. Objective: To determine the validity of multiple-choice questions and the items of a final exam, by calculating the indices of the classical test theory. Methods: A cross-sectional and analytical study was carried out with the purpose of assessing the quality and validity of the multiple-choice questions of the ordinary final exam of the Clinical Propaedeutics subject during the 2018-2019 academic year, by assessing the reagents according to the classical test theory. Results: The relative frequency of the items response was adequate for a final exam of the subject. 75percent of the exam items were correctly made. 87.5 percent of the reagents presented an adequate discrimination index. Conclusions: The reagents assessed had an acceptable quality for a certification test, such as the final exam of a subject; although minor deficiencies were detected(AU)

The application of instant evaluation based on information technology in anatomy teaching from China / Aplicación de evaluación instantánea basada en tecnología de la información en la enseñanza de la anatomía en China

SUMMARY: The information technology (IT) based "instant evaluation" is supported by IT, which allows instant evaluation of teaching phenomena based on certain evaluation criteria and provides instant feedback. In anatomy teaching, we explored and practiced the application of instant evaluation based on a platform called "Rain classroom." We found that IT-based instant evaluation had higher practicability and better student satisfaction, which could improve teaching efficiency during class time, help students improve learning methods, and promote knowledge mastery. Additionally, instant evaluation positively impacted teachers' evaluation ability and teaching skills.

RESUMEN: La "evaluación instantánea" basada en la tecnología de la información (TI) está respaldada por ésta y permite la evaluación instantánea de los fenómenos de enseñanza en función de ciertos criterios de evaluación proporcionando retroalimentación instantánea. En la enseñanza de la anatomía, exploramos y practicamos la aplicación de la evaluación instantánea basada en una plataforma llamada "Aula de lluvia" o Rain Classroom. Descubrimos que la evaluación instantánea basada en TI tenía una mayor practicidad y una mejor satisfacción de los estudiantes, lo que podría mejorar la eficiencia de la enseñanza durante el tiempo de clase, ayudar a los estudiantes a mejorar los métodos de aprendizaje y promover el dominio del conocimiento. Además, la evaluación instantánea tuvo un impacto positivo en la capacidad de evaluación y las habilidades de enseñanza de los maestros.

Formação em educação física no contexto de saúde pública nos melhores cursos do Brasil / The formation of physical education in public health in the best courses in Brazil

RESUMO O objetivo do estudo foi revisar projetos pedagógicos (PP) para identificar a formação do profissional de Educação Física (PEF) (Bacharelado) no contexto de Saúde Pública nos melhores cursos do Brasil. Foram selecionados os 10 melhores cursos de graduação em EF ranqueados em dois sistemas de avaliações nacionais (Exame Nacional de Desempenho na Educação e Ranking Universitário Folha) e as 10 melhores Universidades num ranking internacional (QS World University Rankings). Mediante revisão rápida foram extraídas informações dos PPs de 18 cursos que atenderam aos critérios de inclusão. Trinta e seis disciplinas no contexto de Saúde Pública foram localizadas nas grades curriculares. Em relação a carga horária média menos de 1% da grade eletiva dos cursos era dedicada a disciplinas sobre Saúde Pública. O estudo revelou um cenário de formação de Bacharéis em EF distante do crescimento que a área demonstrou no campo da Saúde Pública nos últimos anos. É importante que os cursos de graduação em EF considerem uma formação específica no contexto da Saúde Pública, de modo a favorecer a consolidação da atuação do PEF e a qualidade do seu serviço na Atenção Primária à Saúde.

ABSTRACT The purpose of the study was to review pedagogical projects (PP) to identify the formation of the Physical Education professionals (PEF) in the context of Public Health in the best courses in Brazil. Methods: The 10 best PE undergraduate courses ranked in two national assessment systems were selected (National Education Performance Examination and Folha University Ranking) and the 10 best Universities in an international ranking (QS World University Rankings). Through a quick review, information was extracted from the PPs of 18 courses that met the inclusion criteria. Thirty-six subjects in the context of public health were located in the curricula. Regarding the average workload, less than 1% of the elective course schedule was dedicated to subjects on Public Health. The study revealed a scenario for the formation of Bachelors in PE far from the growth that the area has shown in the field of Public Health in recent years. It is important that PE undergraduate courses consider specific training in the context of Public Health, in order to favor the consolidation of the PEF's performance and the quality of its service in Primary Health Care.

Ambiente de ensino-aprendizagem na formação inicial universitária / Teaching-learning environment in initial university training in physical education

ABSTRACT This study aimed to analyze the perceptions of university Physical Education students at different progression levels in the programs regarding the teaching-learning environment in the initial training. In total, 273 students (Bachelor's program n = 150; Licentiate program n = 123) from the Licentiate Program in Physical Education of a public university in Santa Catarina, Brazil, participated in this study, responding to the adapted version of the Assessment Questionnaire of the Perceived Environment in the Initial Training in Physical Education. The Chi-square test was used to analyze the associations between the student progression levels in the programs and their perceptions about the initial training environment. The results indicated the predominance of practical classes/experiences and written theoretical evaluations, especially in the initial phases. The infrequent observation experiences and learning through practice or observation were the assumed roles, made evident primarily in the final semesters. Although the students perceived themselves as active regarding their participation levels, they indicated that the professors are the ones responsible for making the decisions. It is concluded that the initial training in Physical Education requires reconfiguring certain teaching-learning practices to increase student involvement and responsibility for their own training process.

RESUMO Objetivou-se analisar as percepções de estudantes universitários de Educação Física em distintos níveis de progressão no curso, sobre o ambiente de ensino-aprendizagem na formação inicial. Participaram 273 estudantes (Bacharelado n=150; Licenciatura n=123) do curso de licenciatura em Educação Física de uma universidade pública de Santa Catarina, Brasil, os quais responderam à versão adaptada do Questionário de Avaliação do Ambiente Percebido da Formação Inicial em Educação Física. O teste Qui-quadrado foi utilizado para analisar as associações entre o nível de progressão discente nos cursos e suas percepções sobre o ambiente de formação inicial. Os resultados indicaram a predominância de aulas/vivências práticas e de avaliações teóricas escritas, especialmente nas fases iniciais. As experiências poucos frequentes de observação, e o aprendizado pela prática ou por observação foi o papel assumido, especialmente evidenciados nos semestres finais. Apesar de os estudantes terem se percebido ativos quanto ao seu nível de participação, indicaram que os professores são os principais responsáveis por tomar as decisões. Conclui-se que a formação inicial em Educação Física necessita reconfigurar determinadas práticas de ensino-aprendizagem para aumentar o envolvimento e a responsabilidade discentes pelo próprio processo formativo.

Factors associated with the academic performance of Nutrition students at a public university in southern Brazil / Fatores associados ao desempenho acadêmico de estudantes de Nutrição de uma universidade pública do sul do Brasil

ABSTRACT Objective To assess the association of socioeconomic factors, characteristics of the academic trajectory, and curriculum of students of a Nutrition course in the academic performance in the Exame Nacional de Desempenho dos Estudantes. Methods A study of cross-sectional panels with secondary data (Exame Nacional de Desempenho dos Estudantes 2004, 2007, 2010, 2013, 2016, and 2019) of 174 graduating students was carried out. Academic performance was classified into two groups, one with a score below the median and another above the median. The differences in median scores according to the variables were tested using the Mann-Whitney, Kruskal-Wallis, or non-parametric trend analysis. Logistic regression analysis was used to assess the association of the score variable with the other variables. The analyses were carried out using the Stata version 13.0 program, using a value of p<0.05 for the statistical decision. Results It was observed that the profile of graduating students was composed mainly of female individuals (92.5%), self-declared white (90.8%), and mostly coming from private schools (65.8%). Those who had some type of income obtained a higher score in Exame Nacional de Desempenho dos Estudantes compared to those who did not have an income (61.8 vs. 57.4, respectively, p=0.010), and the curricular change seems to be the main variable in the chances of obtaining a score above the median of the course (OR: 1.92, p=0.046). Conclusion Financial status and curriculum change were associated with the academic performance of the assessed students. These results can be used as a reference for investigations in other institutions, public or private, of different courses and, thus, assist in planning more effective educational policies.

RESUMO Objetivo Avaliar a associação dos fatores socioeconômicos, características da trajetória acadêmica e currículo de estudantes de um curso de Nutrição com o desempenho acadêmico deles no Exame Nacional de Desempenho de Estudantes. Métodos Realizou-se o estudo de painéis transversais com dados secundários (Exame Nacional de Desempenho de Estudantes 2004, 2007, 2010, 2013, 2016 e 2019) de 174 estudantes concluintes. O desempenho acadêmico foi classificado em dois grupos, um com nota abaixo da mediana e outro acima da mediana. As diferenças de mediana de notas segundo as variáveis foram testadas por meio dos testes de Mann Whitney, Kruskal Wallis ou análise não paramétrica de tendência. A análise de regressão logística foi utilizada para avaliar a associação da variável nota com as demais. Utilizou-se o programa Stata versão 13.0 com valor de p<0,05 para a decisão estatística. Resultados Observou-se que o grupo de estudantes concluintes era composto majoritariamente por indivíduos do sexo feminino (92,5%), autodeclarados brancos (90,8%) e, em sua maioria, oriundos de escolas privadas (65,8%). Os que dispunham de algum tipo de renda obtiveram nota maior no Exame Nacional de Desempenho de Estudantes em relação àqueles que não possuíam renda (nota 61,8 vs 57,4, respectivamente; p=0,010), e a mudança curricular parece ser a principal variável nas chances de se obter uma nota acima da mediana do curso (OR: 1,92, p=0,046). Conclusão A situação financeira e a mudança curricular foram associadas ao desempenho acadêmico dos estudantes avaliados. Esses resultados podem ser usados como referência para investigações em outras instituições, públicas ou privadas, com estudantes de diferentes cursos, e, assim, auxiliar no planejamento de políticas educacionais mais efetivas.

Propuesta de evaluación del razonamiento diagnóstico en los ejercicios de pase de año y de graduación en las especialidades clínicas / Proposal for the evaluation of diagnostic reasoning in the year and graduation assessments in clinical specialties

importancia del razonamiento diagnóstico, como competencia profesional, justifica que la discusión de la actividad evaluativa se incluya en la llamada Evaluación de Graduación de las residencias médicas. En este artículo se proponen algunos indicadores a utilizar por los profesores durante las actividades de discusión diagnóstica evaluativas; indicadores que emanan de la descomposición de la actividad en sus pasos o acciones. El empleo de estos indicadores y de algunas sugerencias realizadas puede contribuir a hacer más uniforme la evaluación y calificación de los ejercicios de discusión diagnóstica en el marco de la Evaluación de Graduación, o de los exámenes de promoción o pase de año(AU)

The importance of diagnostic reasoning, as professional competence, justifies the discussion of the evaluative activity in the so-called Graduation Assessment of medical residencies. This article proposes some indicators to be used by the professors during the diagnostic discussion evaluative activities. These indicators derive from the breakdown of the activity in steps or actions. The use of these indicators and some suggestions can contribute to making the evaluation and qualification of the diagnostic discussion exercises more uniform in the framework of the graduation assessment, or of the promotion or year exams(AU)

Valoraciones de docentes y evaluadores sobre evaluación del aprendizaje en la carrera de enfermería / Evaluations by Professors and Evaluators about Learning Assessment in the Nursing Major

Introducción: La evaluación del docente y del evaluador está centrada en criterios de valoración que la posiciona en el paradigma interpretativo, pues busca llegar a comprender e interpretar experiencias académicas sobre la calidad y el compromiso docente. Objetivo: Describir la valoración de docentes y evaluadores sobre evaluación del aprendizaje en la carrera de enfermería. Métodos: Estudio cuantitativo, descriptivo transversal, en la carrera de enfermería de la Universidad Estatal Península de Santa Elena, Ecuador, durante primer trimestre del 2018. Universo de 41 docentes y 9 evaluadores que impartieron docencia durante el periodo estudiado, se aplicó un cuestionario y lista de chequeo, validados por criterios de expertos. Se calcularon frecuencias absolutas, porcentajes y varianzas, las comparaciones para los grupos de docentes y evaluadores se realizaron con prueba U de Mann-Whitney. El nivel de significación si p ≤ 0,05. Resultados: Existieron consistencias y similitud entre las valoraciones de la heteroevaluación durante el proceso, los valores encontrados en docentes y evaluadores están entre intervalos 0,80 y 0,89, en evaluadores superior a 0,85, equivalente a resultado fiable, con consistencia interna del instrumento, el indicador con mayor tendencia negativa evidenció 24,39 por ciento, lo que significa que en la evaluación no se alcanzan los logros deseados. Conclusiones: Los evaluadores áulicos consideran que en la evaluación no se alcanzan los logros deseados, que se evidencian aspectos que no corresponden con los preceptos de la evaluación del aprendizaje y que por lo general resulta ser lo típico del proceso evaluativo tradicional, a pesar de estar normado por Reglamento Nacional para Evaluación Estudiantil en Ecuador(AU)

Introduction: Evaluation by any professor or evaluator is centered on assessment criteria belonging to the interpretive paradigm, since it is aimed at understanding and interpreting academic experiences concerning quality and commitment of the professor. Objective: To describe evaluation by professors and evaluators on learning assessment in the Nursing major. Methods: Quantitative, descriptive and cross-sectional study carried out, during the first trimester of 2018, in the Nursing major of Universidad Estatal Península de Santa Elena, Ecuador. The universe was made up of 41 teachers and nine evaluators teaching during the study period. A questionnaire and a checklist, validated using expert judgment, were applied. Absolute frequencies, percentages and variances were calculated. The comparisons for the groups of professors and evaluators were made using Mann-Whitney U test. Differences were statistically significant if P ≤ 0.05. Results: There were consistencies and similarity among the evaluations of heteroassessment during the process; the values found in professors and evaluators are in the intervals between 0.80 and 0.89. In evaluators, it is greater than 0.85, equivalent to a reliable result, with internal consistency of the instrument. The indicator with the greatest negative trend showed 24.39 percent, which means that the desired achievements were not reached in assessment. Conclusions: Classroom evaluators consider that the desired achievements are not reached in assessment, that aspects that do not correspond to the precepts of learning assessment are evidenced, and that, in general, it turns out to a typical characteristic in traditional assessment, despite being regulated by the National Regulation for Student Assessment in Ecuador(AU)

Propuesta de guía para la evaluación conjunta del trabajo de curso en Metodología de la Investigación y Prevención en Salud / Guide proposal for the combined evaluation of the term paper in Methodology of investigation and Health prevention

Uno de los cambios más importantes en el perfeccionamiento de los planes de estudio es lograr una evaluación final más cualitativa e integradora en todas las disciplinas, donde se proyecten trabajos de curso interdisciplinarios. Por tanto, en la Facultad de Ciencias Médicas de Holguín se consideró oportuno unificar el trabajo de curso de las asignaturas Metodología de la Investigación y Prevención en Salud, lo que impone que los profesores de ambas materias actúen del mismo modo en la orientación, seguimiento y evaluación de esta actividad, motivo por el cual se elaboró una guía que facilita la orientación para el desarrollo del trabajo a los estudiantes y la uniformidad de criterios de los docentes para evaluar y disminuir la subjetividad al otorgar una calificación.

One of the most important changes in the syllabus improvement is to achieve a more qualitative and comprehensive final evaluation in all disciplines, where interdisciplinary term papers are projected. Therefore, it was considered opportune to unify the term papers of Methodology of Investigation and Health Prevention subjects in the Medical Sciencies Faculty of Holguín, what imposes that professors of both matters act in the same way towards the orientation, follow-up and evaluation of this activity, reason why a guide that facilitates the orientation for work development to the students and criteria uniformity in the teaching staff to evaluate and diminish the subjectivity when granting a qualification was elaborated.

Instrumentos de avaliação de ensino-aprendizagem de materiais didáticos utilizados na atenção básica- scoping review / Methods of evaluating the effectiveness of teaching materials used in primary health care- scoping review

Identificar, junto à literatura, quais os métodos mais eficientes para avaliar a aplicação dos materiais didáticos na Atenção Básica, enfatizando o público infanto-juvenil,Scoping Review, por meio da pergunta de pesquisa: "Quais os métodos de avaliação de ensino-aprendizagem da educação em saúde nas escolas, no contexto da Atenção Primária, para crianças e adolescentes?". A busca foi realizada nas bases de dados National Library of Medicine (PubMed), Cumulative Index to Nursing and Allied Health Literature (CINAHL), Search for an Author Profile (SCOPUS) e Scientific Electronic Library Online (Scielo). Entre os 285 estudos encontrados, 13 fizeram parte da amostra por responderem à pergunta de pesquisa. Entre os 13 estudos analisados, 9 (69,24%) foram publicados nos últimos nove anos e 4 (30,76%) entre 1991 e 1999. Todos são de língua inglesa e a maior parte deles aborda hábitos alimentares e físicos (30,7%). Sobre o ensino-aprendizagem, as estratégias mais efetivas foram aquelas que incluíam a família e a comunidade e/ou desenvolviam a autonomia do aluno no processo. A maioria utilizou questionários autorais para avaliar a educação em saúde, exceto na temática alimentação e atividades físicas, em que dados antropométricos foram mais frequentemente utilizados. O assunto é recente, publicado, na maior parte, no exterior. A maioria dos instrumentos de avaliação foram criados pelos próprios autores e os aspectos clínicos majoritariamente investigados nos estudos tratavam sobre as questões alimentares. As estratégias de ensino-aprendizagem mostraram-se mais efetivas quando adolescentes eram o público-alvo.

To identify the most efficient methods for evaluating the effectiveness of teaching materials in Primary Health Care, aimed at school-age youngsters, Scoping Review. Our leading question was: Which are the evaluation methodologies of the teaching-learning process in health education in schools in Primary Health Care used with kids and teenagers (schooling age youngsters)? The search occurred on the National Library of Medicine (PubMed), Cumulative Index to Nursing and Allied Health Literature (CINAHL), Search for an Author Profile (SCOPUS), and Scientific Electronic Library Online (Scielo). Among the 285 studies found, 13 (100%) constituted our sample for answering our leading question. Among the 13 studies analyzed, 9 (69,24%) were published in the past 9 years and 4 (30,76%) between 1991 and 1999. All were in English, and most were on eating and physical habits (30,7%). Concerning the learning-teaching process, the most effective strategies included family and community and/or aimed to develop students' autonomy. Most were based on self-made questionnaires to evaluate health education activities, except for the studies on feeding/nutrition and physical activities, which frequently used anthropometric data. Due to its newness, most of the work on the subject was from abroad. The authors created most of the evaluation methodologies, and nutrition and feeding were the main topics investigat-ed. Teaching-learning strategies were more effective among teenagers.

Objective structured clinical examination (OSCE) para profissionais de enfermagem pediátrica e neonatal: construção e validação de formulários de feedback / Objective structured clinical examination (OSCE) for pediatric and neonatal nursing professionals: construction and validation of feedback forms

Objective structured clinical examination (OSCE) ou exame clínico estruturado objetivo é uma estratégia de avaliação por competências, que foi introduzido por Hardem em 1977, que utilizam estações clínicas que promovem autonomia e reflexão aos participantes. O OSCE foi projetado para avaliar habilidades clínicas e competências técnicas utilizando-se de ambiente simulado de aprendizagem. Ao término de cada estação de OSCE, o avaliador responsável por aquela estação, é auxiliado por um formulário ou check list sobre as ações esperadas para o caso clínico, e realiza o feedback do desempenho junto com o participante. Este um momento decisivo para a consolidação da aprendizagem e exerce grande influência na motivação. Desta maneira, é importante que os desafios enfrentados pelos profissionais de saúde sejam analisados, discutidos, e resolvidos por meio da prática baseada em evidências, metodologias ativas e decisão conjunta da equipe. Assim, o objetivo deste estudo foi desenvolver e validar formulários de feedback estruturado para estações de OSCE em enfermagem pediátrica e neonatal. Este é um estudo de natureza metodológica baseado nos prescritos de Polit e Beck, na qual obtém, organiza e analisa dados para abordar a elaboração e validação de conteúdo do formulário por peritos. Nos resultados, após calculado o Índice de Validação de Conteúdo, foram desenvolvidos oito formulários de feedback com quatro estações clínicas sobre a assistência em enfermagem pediátrica e neonatal. Os formulários foram organizados por estação para profissionais de enfermagem, bem como para enfermeiros. A validação do conteúdo dos formulários contou com a participação de 20 peritos, onde foi alcançado uma média de 11,65 pontos na Classificação de Ferhing. Os formulários de OSCE receberam "concordo" e "concordo fortemente" por mais de 90% dos peritos. O índice de concordância entre os peritos obteve um valor superior a 0,9. Os apontamentos sugeridos pelos peritos foram implementados na versão 2 dos formulários. Diante do exposto, os formulários apresentam estruturas robustas para uso no feedback formativo durante a OSCE acerca do cuidado em enfermagem pediátrica e neonatal

Objective structured clinical examination (OSCE) is a competency assessment strategy introduced by Hardem in 1977, which used clinical stations that promote autonomy and reflections to the participants. The OSCE was designed to assess clinical and technical skills using a simulation-based learning environment. At the end of each OSCE station, the evaluator responsible for that station is assisted by a form or check list about actions expected and provide a feedback about the participants' performance. This is a decisive moment which allows to consolidate the learning and has a great influence in motivation. It is important that the challenges faced by health professionals are analyzed, discussed and resolved through evidence-based practice, active methodologies and joint team decision. Thus, the aim of this study was to develop and validate a structured feedback forms for OSCE stations in pediatric and neonatal nursing. This is a study of methodological nature based on Polit and Beck, which obtain, organize and analyze data to address the elaboration and validation of the content forms by experts. On the results, after calculating the Content Validity Index, were development eight feedback forms with four clinical station for pediatric and neonatal nursing care. The forms were organized by station for nurses' professionals, as well as nurses. The validation of the content forms had the participation of 20 experts which an average of 11.65 points was reached in the Ferhing Classification. OSCE forms received "agree" and "strongly agree" by more than 90% of experts. The indices of agreement between the experts was greater than 0.9. The notes suggested by the experts were implemented in version 2 of the forms. In conclusion, the forms present robust structures for use in formative feedback during the OSCE involving pediatric and neonatal nursing care

Competências clínicas do aluno de medicina em urgência e emergência: análise evolutiva através do OSCE / Clinical competencies of students in urgent and emergency care: evolutive analysis through OSCE

Resumo: Introdução: Um dos maiores desafios em avaliar a formação médica é mensurar habilidades práticas, transpondo os limites do conhecimento teórico. O OSCE é uma alternativa de avaliação ativa e padronizada das competências clínicas. Apesar da sua crescente implementação, ainda são escassos os estudos longitudinais que subsidiem seu potencial avaliativo. Objetivo: Analisar a curva de aprendizagem dos estudantes de medicina com base na avaliação evolutiva de seus desempenhos nos OSCE de Urgência e Emergência. Método: Estudo retrospectivo a partir da análise de checklists avaliativos de três OSCE consecutivos, aplicados ao longo de 2019 a alunos do sexto ano de medicina da Universidade Positivo, na disciplina de Urgência e Emergência. Resultado: Foram analisados 270 checklists, aplicados a 90 alunos. Desse grupo, 51 (56,7 pontos percentuais) eram do gênero feminino e 69 (76,7 pontos percentuais) tinham entre 23 e 26 anos. Entre o primeiro e terceiro OSCE, 67 alunos (74,4 pontos percentuais) obtiveram um acréscimo significativo na nota final, cuja mediana foi elevada em 1,5 ponto. A partir da análise da evolução por componentes - conduta, reconhecimento, interação e seguimento - observou-se aumento no percentual de acertos em conduta (15,5 pontos percentuais), manutenção em reconhecimento, decréscimo tanto em interação (19,4 pontos percentuais) quanto em seguimento (16,1 pontos percentuais). Conclusão: O estudo aponta uma curva crescente das notas nos exames OSCE, sugerindo um aumento no aprendizado geral em Urgências e Emergência ao longo do ano. No entanto, a análise minuciosa dos componentes revela diferentes curvas de desempenho. Não sendo possível supor as causas destes contrapontos, são sugeridos mais estudos na área.

Abstract: Introduction: One of the major challenges in evaluating medical education is measuring practical skills, crossing the limits of theoretical knowledge. The Objective Structured Clinical Examination (OSCE) is an alternative for active and standardized assessment of clinical competencies. Despite its growing implementation, longitudinal studies that support its evaluative potential are still scarce. Objective: To analyze the learning curve of medical students based on continuous assessment of their OSCE exams and individual performances within the discipline of Urgent and Emergency Care. Method: This retrospective study is based on the analysis of data taken from assessment checklists from three consecutive OSCEs applied to sixth-year Brazilian medical students within the Urgent and Emergency Care program of the 2019 academic year. Result: 270 assessment sheets from a total of 90 students were analyzed. The group was made up of 51 females (56.7 percentage points) and 69 of the students (or 76.7 percentage points) were aged between 23 and 26 years old. Between the first and third OSCE, 67 students (74.4 percentage points) increased their final grade, the median of which increased by an average of 1.5 points. Of the four medical components evaluated - conduct, recognition, interaction and follow-up - there was an improvement of 15.5 percentage points in correct conduct, zero impact on the results concerning recognition and drops of 19.4 and 16.1 percentage points in the areas of communication and follow-up, respectively. Conclusion: The study points to an increasing curve in OSCE scores, suggesting an increase in general learning in Urgent and Emergency Care over the course of the year. However, careful analysis of the components reveals different performance curves. Since it is not possible to presume the causes of these counterpoints, further studies in the area are suggested.

Identification of struggling readers or at risk of reading difficulties with one-minute fluency measures

Abstract Background: To identify readers who are struggling or at risk of reading difficulties, reference standards in oral reading fluency (ORF) are used to conduct an assessment that is based on a widely reported method known as curriculum-based measurement (CBM), which itself is based on 1-min fluency measures. The purpose of this study was to evaluate students' ORF (with a 1-min fluency measure) to characterize their fluency and to determine references of appropriate development in reading at the 50th percentile. Method: For this study, a database of readings made available by the Learning Studies Research Laboratory was used. This database consisted of 365 readings by elementary-school students from the third to fifth grades in two cities in the interior of the state of São Paulo from two different public school systems that use the same teaching methodology. The data consisted of digital audio recordings of the passage "The Umbrella" (text suitable for schooling levels) of the Protocol for Assessment of Reading Comprehension procedure. For this procedure, three steps were performed: step 1—listening to the 365 readings and assessing the scores for the number of words read correctly per minute; step 2—the calculation of the mean and percentiles for each grade; and step 3—the adaptation of the reference table to indicate students eligible to receive reading fluency intervention. Results: Third-year students who correctly read 86 or more words per minute, fourth-year students who correctly read 104 or more words per minute, and fifth-year students who correctly read 117 or more words per minute were considered students who had made adequate progress in reading. Conclusion: It was possible to classify students based on the 1-min fluency measures, with reference intervals of words read correctly per minute per school year (for the third, fourth, and fifth years) for those who were making adequate progress in reading and reference intervals for those who were considered readers who were struggling or at risk of reading difficulties.

Avaliação por pares na educação médica: um relato das potencialidades e dos desafios na formação profissional / Peer review in medical education: a report of the potentialities and challenges for professional training

Resumo: Introdução: As Diretrizes Curriculares Nacionais (DCN) para o curso de Medicina propõem métodos de ensino e avaliação em que os discentes possam desenvolver criticidade em relação às necessidades de aprendizado. Nesse contexto, a avaliação por pares (AP) apresenta-se como uma estratégia didática capaz de potencializar esse processo. Apesar disso, ainda se observa pouco uso dessa ferramenta na graduação, contudo ela é frequente em congressos científicos e avaliação de periódicos. Diante disso, este relato de experiência busca compartilhar os aprendizados e as reflexões da implementação sistematizada da AP em um componente curricular de Saúde Coletiva do curso de Medicina da Universidade Federal de Uberlândia. Relato de experiência: O componente em que a atividade foi criada contava com atividades teórico-práticas durante o semestre. Assim, a atividade relatada iniciou-se com a elaboração de pôsteres ao longo do semestre em razão de sua importância em congressos médicos. Esses pôsteres discorriam sobre as vivências dos alunos na atenção primária à saúde. A avaliação desses pôsteres foi feita consecutivas vezes por meio de instrumento de AP pactuado com os estudantes previamente, o qual pontuava critérios estruturais do pôster, bem como seu conteúdo. Os acadêmicos puderam ser avaliados e atuar como avaliadores, sendo supervisionados pelos professores, o que contribuiu para o desenvolvimento da criticidade no processo de aprendizagem. Discussão: Inicialmente, a atividade gerou estranheza dada a pouca familiaridade dos alunos com a AP, o que foi superado ao longo do semestre. Como limitações, apontamos a necessidade de lidar com as subjetividades no processo avaliativo dos alunos, de formação em feedback e gestão de conflitos, além de possíveis limitações tecnológicas dos discentes. Conclusão: A AP, embora seja uma estratégia utilizada em outros cenários científicos, possui caráter inovador na graduação e pode promover as competências esperadas para um profissional médico crítico e autônomo, como a familiaridade com a prática do feedback e a capacidade de análise crítica.

Abstract: Introduction: The Brazilian National Curriculum Guidelines (NCG) for undergraduate courses in medicine propose teaching and assessment methods in which students can develop criticality in relation to learning needs. In this context, Peer Review (PR) represents a didactic strategy capable of enhancing this process. However, there is still little use of this tool in undergraduate training, and frequent use in scientific congresses and evaluation of journals. This experience report seeks to share the learning and reflections of the systematic implementation of the PR in a curricular component of Public Health in a medical undergraduate course at the Federal University of Uberlândia, Brazil. Experience report: The discipline in which the activity was created had theoretical and practical activities during the semester. Thus, the reported activity started with posters about student experiences in Primary Health Care being made throughout the semester due to its importance in medical congresses. These posters were evaluated consecutively using the PR instrument previously agreed with the students, which scored structural criteria of the poster as well as its content. The students could be evaluated and act as evaluators, being supervised by professors, which contributed to the development of criticality in the learning process. Discussion: Initially, the activity generated strangeness by students because of their lack of familiarity with PR, which was overcome over the discipline. As limitations, we point out the need to deal with subjectivities in the students' evaluation process, training in feedback and conflict management, in addition to possible technological limitations of some students. Conclusions: PR, although a strategy used in other scientific scenarios, has an innovative character in undergraduate courses and can promote the skills expected for a critical and autonomous medical professional, such as familiarity with the practice of feedback and the capacity for critical analysis.

Validação de conteúdo para um instrumento para avaliação de estudantes de Medicina em sessões tutoriais / Validation of content for an instrument to assess medical students in tutorial sessions

Resumo: Introdução: O perfil do médico esperado no Brasil compreende um profissional com visão holística do ser humano. Para alcançar esse perfil, as metodologias ativas de ensino, como a aprendizagem baseada em problemas (ABP), vêm ganhando espaço. Para que a ABP atinja todos os seus objetivos na formação do profissional, uma boa avaliação é indispensável. A disponibilidade de instrumentos de avaliação validados representa um avanço na tentativa de mensurar e direcionar o aprendizado. Objetivo: Este estudo teve como objetivos desenvolver e validar o conteúdo para um instrumento de avaliação de estudantes em sessões tutoriais para uso em cursos de Medicina que utilizem a metodologia ABP. Método: Para a construção da versão preliminar do conteúdo destinado ao instrumento, foi realizada uma revisão sistemática rápida nas bases de dados PubMed, Ebsco e BVS. Com a revisão, desenvolveu-se a versão preliminar, que contou com 24 itens agrupados em três domínios (utilização de recursos de aprendizagem, compreensão e raciocínio - D1, profissionalismo e trabalho em equipe - D2 e resolução de problemas e efetividade no grupo - D3), cada um com oito itens. Essa versão foi encaminhada a um painel de especialistas composto por tutores com pelo menos cinco anos de experiência em ABP da Faculdade Pernambucana de Saúde (FPS), por meio da metodologia Delphi. Resultados: Dos 32 membros inicialmente previstos no painel, 17 foram incluídos na análise dos dados, por terem respondido ao questionário completamente. Na primeira rodada, alcançou-se um valor de concordância parcial ou total superior a 70%, valor inicialmente previsto para todos os 24 itens do instrumento, o que dispensou a necessidade de uma segunda rodada. Para diminuir o número final de itens, optou-se por manter apenas os itens com pelo menos 70% de concordância total, tendo a versão final do instrumento quatro itens no D1, cinco no D2 e quatro no D3. Conclusões: O instrumento foi validado com um total de 13 itens. O conteúdo para o instrumento apresentou componentes com várias semelhanças em relação aos encontrados nos instrumentos publicados na literatura e já validados, que, por sua vez, estão de acordo com os objetivos de aprendizagem propostos pela ABP.

Abstract: Introduction: The expected doctor profile in Brazil comprises a professional with a holistic view of the human being. To achieve this profile, active teaching methodologies, such as Problem-Based Learning (PBL), are gaining ground. For PBL to achieve all its objectives in the training of professionals, good assessment is essential. The availability of validated assessment instruments represents an advance in the attempt to measure and direct learning. Objective: The aim of this study was to develop and validate the content for an instrument for assessing students in tutorial sessions for use in medical courses that use PBL methodology. Method: For the construction of the preliminary version of the content for the instrument, a Rapid Systematic Review was carried out in the PUBMED, EBSCO and BVS databases. The preliminary version was thus developed with 24 items grouped in three domains (use of learning, understanding and reasoning resources - D1, Professionalism and teamwork - D2, and Problem-solving and group effectiveness - D3), each with eight items. This version was sent to a panel of experts made up of tutors with at least five years' experience in PBL at the Faculdade Pernambucana de Saúde (FPS), using the Delphi methodology. Results: Of the 32 members initially earmarked for the panel, 17 were included in the data analysis, for having fully answered the questionnaire. In the first round, a partial or total agreement value greater than 70 percent was reached, which was initially expected, for all 24 items of the instrument, which dispensed with the need for a second round. To reduce the final number of items, only those with at least 70 percent total agreement were maintained, with the final version of the instrument containing four items on D1, five on D2 and four on D3. Conclusions: The instrument was validated with a total of thirteen items. The content for the instrument brought components with several similarities to those that make up the instruments published in the literature that have already been validated, which in turn are in accordance with the learning objectives proposed by PBL.